Ubuntu下将一个文件压缩为多个分卷并解压恢复

最新推荐文章于 2024-09-11 16:07:02 发布
最新推荐文章于 2024-09-11 16:07:02 发布
阅读量2.9k 收藏 12
点赞数 2
分类专栏： Linux 文章标签： linux 深度学习 tar split 压缩切分
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/sunmingyang1987/article/details/117198758
版权

深度学习领域用到的数据集动辄几十上百G，在服务器上传和下载都不太方便，可以利用tar、split和cat命令将大的数据集文件切分为多个分卷，再进行下载或上传，然后再组装解压进行恢复：

切分压缩：这里用到了两个命令：tar和split，分别实现文件压缩和文件切割

tar czf - train.zip | split -b 6000m - train.tar.gz #将训练集切分为大小为6000M的多个分卷

解压恢复：这里也用到了两个命令：cat和tar，分别实现分卷组合和解压缩。

cat train.tar.gz* | tar -xzv
ACE-Mayer
关注
专栏目录
ubuntu 压缩拆分_在Ubuntu Linux上将文本文件拆分为一半（或任何百分比）
cum44153的博客
10-05 801
ubuntu 压缩拆分If you have an unwieldy text file that you are trying to process, splitting it in sections can sometimes help processing time, especially if we were going to importa file into a spreadshee...
【Linux命令】--- Linux下的分卷压缩与解压
秋知叶i
05-28 2415
在编程的艺术世界里，代码和灵感需要寻找到最佳的交融点，才能打造出令人为之惊叹的作品。而在这座秋知叶i博客的殿堂里，我们将共同追寻这种完美结合，为未来的世界留下属于我们的独特印记。
多分卷压缩文件解压软件
01-06
现在很多共享文件由于太大，实行了分卷压缩，在下载后，如果名字不对应则无法解压，这个软件可以自动识别是否属于同一个文件的不同分卷，而不需要这个分卷的名字都对应，您可以方便的解压您的多分卷文件
ubuntu解压缩分卷压缩文件（同时解压多个文件）
weixin_49617318的博客
08-30 6531
Ubuntu系统的日常使用
Linux: windows或者Ubuntu解压分卷压缩、解压zip、z01、z02
最新发布
m0_46135173的博客
09-11 578
zip 命令将会合并 Image.zip 及其后续的分卷文件（如果有的话，例如 Image.z01, Image.z02, 等等）并将结果保存为 full.zip。在 .zip 文件（主文件）或 .z01 文件上右键点击，选择 “Extract Here”（解压到此处）或 “Extract to [文件夹名]”。在 .zip 文件上右键点击，选择 “7-Zip” -> “Extract Here”（解压到此处）或 “Extract to [文件夹名]”。7-Zip 将会自动识别并解压所有分卷。
ubuntu - 压缩文件及分包
感觉不怎么会的博客
11-09 500
解释：tar cvzpf - xxx(文件名) | split -d -b 4G(每个包大小) xxx(解压后文件名)解释：tar -zvcf xxx.tar.gz(压缩后的文件名) xxx/(需要压缩的文件目录)################## 递归删除目录下的 .git 目录，命令如下。################## 压缩源码目录。################## 合并压缩包。################## 分割压缩包。################## 解压压缩包。
Ubuntu 下大文件夹分卷压缩
Mr_sheik的专栏
07-27 4365
Ubuntu 下大文件夹分卷压缩 由于android源码比较大，直接上传百度云盘又有文件大小限制，因此，分卷压缩尤其重要ref : http://blog.csdn.net/baggio1006/article/details/17503113 有没有遇到某些网站上传复件时，单个文件有大小限制，导致上传失败呢？当然你可以采用更高的压缩率重新生成压缩包来解决，但如果还是超出大小限制，那该怎么办呢？
5.Ubuntu下的文件压缩与解压：gzip、bzip2、tar、rar 和 zip详解
m0_60134435的博客
02-04 5731
`tar` 是一个常用的归档工具，在 Linux 和类 Unix 系统中广泛使用。它的名称来自于 "tape archive"（磁带归档）的缩写，最初设计用于在磁带上创建归档备份。现在，`tar` 主要用于创建和管理归档文件，通常用于将多个文件或目录打包成单个文件，以便于存储、传输或备份。，使用广泛。
在ubuntu中使用7z压缩命令分卷压缩超大文件
python深度学习笔记,一起学习的加QQ2737499951
08-16 5564
在ubuntu中使用7z压缩命令分卷压缩超大文件 目的：学习在ubuntu中使用分卷压缩与解压缩 环境：ubuntu 16.04 使用rar分卷压缩: 1 rara-m5-v2048mmyarchivemyfiles # 最大限制为 12M 1 raremyarchive.part1....
ubuntu分卷压缩
07-28
- *1* *2* [ubuntu解压缩分卷压缩文件（同时解压多个文件）](https://blog.csdn.net/weixin_49617318/article/details/126612946)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_...
linux自带的unzip命令可以解压windows下的zip格式的压缩文件。
11-02
ZIP文件可以包含多个单独的文件或目录，它们会被一起压缩并在需要时整体解压。由于其广泛支持，ZIP在不同操作系统间的数据交换中扮演着重要角色。 Linux中的unzip命令提供了许多功能，包括： 1. 解压ZIP文件：基本...
ubuntu分解压缩包
jyl1999xxxx的博客
09-15 421
https://blog.gtwang.org/linux/split-large-tar-into-multiple-files-of-certain-size/ 使用 split 分割檔案   如果要將一個大檔案分割成許多個小檔案，可以使用 split 配合 -b 參數指定每個小檔案的大小，並指定輸出檔名的開頭名稱：   split -b 200M ubuntu.iso "ubu
Ubuntu学习之文件的压缩与打包
闪星的博客
08-26 1508
一.关于文件压缩和打包1.文件压缩 通过压缩算法将文件的体积缩小，同时会将多个文件合并至一起方便交换、传输。2.文件打包 将多个文件或者整个目录合并成一个文件，用来进行文件的备份、分发、传输等。3.Linux支持的压缩格式 “*.Z”：compress程序压缩文件 “*.gz”：gzip程序压缩文件 “.bz2”：bzip2程序压缩文件 “*.tar”：tar程序打包文件，并未压缩 “*.tar
Ubuntu 分卷压缩
haocrab的记录本
01-09 419
1. rar rar a -v1800m left.rar Left/ 7z a left.7z Left/ -v1800m
Ubuntu压缩、解压缩文件
YoungStar70的博客
07-06 407
进入文件当前文件夹 压缩文件 tar -czvf test.tar.gz test 解压缩文件 tar -xzvf test.tar.gz
ubuntu 下使用tar将文件夹(大文件)分包压缩
zonggouai8994的博客
09-26 3339
需求： 有一个test文件夹，压缩之后太大了，想将它拆分成几个压缩包,每个压缩包大小不超过1G. 在命令行输入如下命令： tar -zcvf - test | split -b 1024M -d -a 1 - test.tar.gz 将拆分后的压缩包解压缩： 首先将几个压缩包合并，命令行输入如下命令： cat test.tar.gz* > test.tar.gz 右键解压缩test.tar.gz ......
linux中解压多个文件命令,在Linux中，如何同时解压缩或解压缩多个文件
weixin_34677764的博客
04-28 4598
有时我们必须一次提取多个压缩和rard文件，所有文件都位于一个文件夹中。通过Ubuntu UI进行操作非常简单；您需要做的就是选择要提取的所有文件，单击鼠标右键，然后使用“提取”选项将它们全部提取出来。真正的交易是当我们想通过命令行执行相同的任务时。通过逐个输入文件提取命令来单独提取它们可能被证明是相当冗长的，而且坦率地说是不合逻辑的。这是抢救循环的重击。您可以使用它一次执行多个类似的操作。本文介...
Ubuntu分卷压缩
tuye123的博客
07-28 1355
最近遇到需求需要将大文件分卷压缩进行传输然后再恢复，简单做个记录。
ubuntu16.04 下对文件夹进行压缩和解压操作
qq_26413875的博客
07-27 1983
压缩与解压 命令1: zip 压缩，将 xx 文件夹压缩为 yy.zip zip -r yy.zip xx 解压，将 xx.zip 解压为 xx 文件夹 unzip xx.zip 命令2: tar 压缩，将 xx 文件夹压缩为 yy.tar tar -cvf yy.tar xx 解压，将 yy.tar 解压到当前目录 tar -xvf yy.tar 解压，将 yy.tar 解压到指定的已存在目录 tar -xvf yy.tar -C /home/jialei/Soltware/ 命令3: tar.gz 压缩
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值